語言模型kenlm的訓練及使用

一、背景 　　近期研究了一下語言模型，同事推薦了一個比較好用的工具包kenlm,記錄下使用過程。 二、使用kenlm訓練 n-gram 　　1.工具介紹：http://kheafield.com ...

用CNTK搞深度學習 （二） 訓練基於RNN的自然語言模型 ( language model )

前一篇文章 用 CNTK 搞深度學習 （一） 入門 介紹了用CNTK構建簡單前向神經網絡的例子。現在假設讀者已經懂得了使用CNTK的基本方法。現在我們做一個稍微復雜一點，也是自然語言挖掘中很火 ...